Nhiều ý kiến của các nhà phê bình đánh giá phần rap của Juicy J mang tính tiêu cực. Marc Hogan của tờ Spin gọi lời bài hát là "món salad của sự sáo rỗng" nhưng vẫn tin rằng bài hát có đầy đủ tiềm năng để trở thành một hit lớn với "phần điệp khúc cao trào" và là "tác phẩm điêu khắc với khâu sản xuất mềm mượt".[20] Robert Copsey của Digital Spy đặt ra câu hỏi về sự quyết định không có một điệp khúc thích hợp trong "Dark Horse" và cả sự có mặt của Juicy J, mặc dù ông đã ca ngợi phần beat nhạc "nhếch nhác" và giọng hát "gợi cảm" của Perry. Ông đánh giá bài hát 4 trên 5 sao.[21] Contributor Dylan Mial của Blogcritics nói rằng "sự sắp xếp cạnh nhau" của giọng hát của Perry và giọng rap của Juicy J mang lại "các thành phần cho một cơn bão âm nhạc hoàn hảo" và ủng hộ Perry cho sự độc đáo của đĩa đơn.[22]

Keith Murphy từ Vibe thì gọi bài hát là "sự lây truyền gợi cảm",[23] trong khi đó John Walker từ MTV cũng có những đánh giá tích cực về bài hát, mặc dù trong đánh giá của anh có viết rằng phần thể hiện của Juicy J như là "thu âm qua điện thoại".[24] Sal Cinquemani của tạp chí Slant đã so sánh bài hát với bài hát "Moments In Love" của ban nhạc Art of Noise và gọi nó là phần tiếp nối của "E.T.", và xem nó như là một trong những bài hát nổi bật từ album.[25] Helen Brown từ The Daily Telegraph thì chỉ trích phần rap của Juicy J rất "ngớ ngẩn".[26] Từ AbsolutePunk, Craig Manning đã xếp "Dark Horse" là bài hát tồi tệ nhất album Prism cùng sự góp mặt của rapper trong nó.[27] Marah Eakin từ The A.V. Club thì không hoàn toàn phê phán và phủ nhận bài hát, cô chỉ lưu ý rằng nó không nằm trong số "những bài hát hay nhất của Perry".[28]

Chris Bosman từ Consequence of Sound có những đánh giá khác nhau về bài hát - trong khi anh ca ngợi bài hát cho cảm giác "đầy sức sống" và "di chuyển về phía trước" thì ngược lại anh lại chỉ trích phần hát của nghệ sĩ khách mời.[29] Viết cho ABC News, Mesfin Fekadu đã nhận xét rằng "đội của cô đã làm tốt hơn" trong bài hát này và thấy rằng "hương vị của hip-hop miền nam với nhạc điện tử" như là một cỗ máy khiến cho bài hát "làm việc".[30] Sam Lansky của trang web nhạc pop Idolator nói rằng "một chiếc bẫy mang hình thái khác thường" của bài hát "không bao giờ hoàn toàn liền lại được".[31] Natalie Palmer từ Entertainmentwise thì chỉ trích phần rap của Juicy J và nói rằng bài hát không thể "cuốn đi ý nghĩ được".[32]